Theo cuốn lịch sử Nirvana do Michael Azerrad viết năm 1993 là Come As You Are, "Pennyroyal Tea" được Cobain sáng tác vào năm 1990, trong một căn hộ anh sống chung với tay trống của ban nhạc Dave Grohl ở Olympia, Washington. "Dave và tôi đang vặn nút điều chỉnh cho một cái 4-track," Cobain nói, "và tôi đã viết bài hát trong khoảng 30 giây. Và tôi ngồi xuống viết lời bài hát trong khoảng nửa giờ và sau đó chúng tôi đã thu âm nó." Tuy nhiên, bài hát không được thu âm chính thức cho đến năm 1993, bài hát mới được Steve Albini thu âm cho album In Utero. Một bản hòa âm lại do Scott Litt thực hiện được có trong phiên bản đã được kiểm duyệt của Walmart và Kmart trong album In Utero; Bản hòa âm này cũng có trong album tổng hợp năm 2002 những bài hát hay nhất của ban nhạc, Nirvana, và bản hòa âm tương tự cũng ngẫu nhiên có trong bài hát phía dưới.